Uczenie Maszynowe 


© Paweł Kułakowski, AGH Kraków 
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Zajecia 


* 10 wykładów (Paweł Kułakowski + Piotr Chołda) 
° 3 spotkania laboratoryjne (Jarosław Bułat) + kolokwium 
* projekty 2/3/4-osobowe 
(Piotr Chołda, Lucjan Janowski, Krzysztof Rusek, Michał Grega, 
Andrzej Matiolanski, Jarosław Bułat) 


* wybór projektów: do końca marca 


* egzamin ustny z wszystkich wykładów: 
P. Chołda albo P. Kułakowski, losowanie :-) 


* ocena końcowa = średnia z egzaminu, labu i projektu, trzeba zaliczyć wszystko 


Materiały do zajęć 


e wykłady P.K.: tele.agh.edu.pl/ —kulakowski/ ml 


° wszystkie materiały razem na UPELu: tiny.cc/upel-um 


Tematy wykładów 


1. Wprowadzenie do AI (P.K.) 

2. Regresja liniowa, szybkość uczenia, algorytm gradient descent (P. К.) 
3. Praca z danymi (P.Ch.) 

4. Regresja logistyczna, undet/over-fitting, diagnozowanie błędów (P.K.) 
5. Wstęp do sieci neuronowych / deep learning (P.K.) 

6. Uczenie nienadzorowane (P.K.) 

7-8. Metody płytkie w uczeniu nadzorowanym (P.Ch.) 

9. Sieci splotowe i tekutencyjne (P.Ch.) 

10. Autoenkodery, zanurzenia i uczenie indukowane (P.Ch.) 


"Bladerunner 2049", Warner Bros. 2017 


...1 Big Data: 


"Game of Thrones" Season 8, HBO 2019 
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"Dune", Warner Bros 2021 
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Popularnosc Al 


Top Searches and Matching Documents ө 
Image Processing 


Artificial Intelligence ЫСЫ 


Antenna 307,742 > 

Machine Learning 182,091 > 
Deep Learning 124,618 > 
Cloud Computing 
ют 

IEEE Sensors Journal 
Optical Fiber Sensor 


Blockchain 16,246 > 


Indoor Navigation 8,935 > 


зегду Efficiency Relay 


„No AI Winter again”? 


"АІ of human level in 3-8 years" i Tę | 
° = ү 
© |. 
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Zakres Al 


enables computers to think 


Artificial Intelligence 


learns from data 


m 


multi-layer neural networks 


understanding data 


Data Science 


Trudne dla człowieka czy trudne dla AI? 


„AI is the new electricity” — A. Ng, 2017 


Piec podstawowych koncepcji AI: 


1. Obserwacja/pozyskiwanie danych 
2. Modelowanie świata i wnioskowanie 
3. Uczenie 


Prof. David Touretzky, AN ins id 
Carnegie Mellon Univ., AI4K12 БУХА ова 
5. Wplyw na spoleczenstwo 


D. Touretzky, IEEE Integrated Stem Education Conference, 2020 15 


1. Obserwacja i pozyskiwanie danych 
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2. Modelowanie i wnioskowanie 


Drzewa decyzyjne 
dla gier: 


b2-c1 


PER Z N>. MIN 


м a a3-b3 а3-с3 аз-а2 a3-b3 a3-c3 а2-с1 а2-с3 
-50 -50 -50 -50 -80 -50 -50 -50 -50 


Chatbot packages data into proper 
response for display by the chat client. 


User types a phrase 
in the chat client. 


Chatbot 


Chatbot sends 
29 the phrase to а 

machine learning 
NLP engine. 


Intent is used to call upon 
proper service, using entity €? 
information to find proper data. 


Data is 
Natural returned to 
Language chatbot. 


Algorytmy Processing 
chatbotów: 4 


Data NLP engine extracts users 
Services intent and entities from 
given phrase and sends 
back to chatbot. 
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3. Uczenie (nadzorowane) 


You are giving the computer a goal state: ‘I want this outcome’ 
and the computer itself is learning how to do it. 
That’s where the ‘machine learning’ term comes from. 

- Jeff Seibert, Twitter former executive 


oczekiwany strojenie 


WYNIK PARAMETROW 
UCZENIE: 


DANE treningowe 
ЫьмнБ  — —— a 


DZIALANIE: 


DANE testowe WYNIK 
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3. Uczenie (nienadzorowane) 


Grupowanie danych (clustering): 


3. Uczenie (ze wzmocnieniem) 


Proces uczenia: 

- wybör okreslonej AKCJI 

- dostosowanej do aktualnego STANU 

- motywowany uzyskiwaniem NAGROD 


160 


28. EWI 


Główne wyzwanie: 
- adekwatne środowisko symulacyjne 


© towardsdatascience.com 


Co zyskujemy? 
- rozwiązania, o których my, humans, nie pomyślelibyśmy :-) 


Algorytm vs uczenie maszynowe 


AlphaZero: 


Stockfish 8: | 
- uczacy sie od zera, 


- komputerowy mistrz z roku 2016 | > | 
żadnej wiedzy o strategiach, 


bez dostępu do bazy danych 
- szybkość: 80 x 10° ruchów / s 
- stosujący uczenie ze wzmocnieniem 


- z dostępem do bazy danych giet 
- szybkość: 70 x 10° ruchów szachowych / s 


- ttening: 4 godziny оту ze samym sobą 
Pojedynek (100 gier), grudzień 2017: 


AlphaZero vs. Stockfish 8 


AlphaZero wygrywa 28 razy, 
72 remisy, ani jednej porazki 


D. Silver, eż al. "Mastering Chess and Shogi by Self-Play with a General Reinforcement Learning Algorithm", arXiv:1712.01815 
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4. Naturalne interakcje 


Interpretacja naturalnego jezyka möwionego 
Pojecia abstrakcyjne 
Humor 


Zdrowy rozsądek 
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Dolina niesamowitosci 


uncanny valley 


Ludzka akceptacja robotow nie rosnie liniowo 
wraz z ich podobienstwem do czlowieka: 


Uncanny Valley 5 Healthy Person 


+ 


Toy Robot 


Bunraku Puppet 


Industrial Robot 


Affinity (Shinwakan) 


Human Likeness 50% 100% 
Prosthetic Hand 


Babyclon, Warszawa 2021 а 


I I @ Masahiro Mori 
— najczęstsze reakcje: dyskomfort, asahiro Mori 


zaskoczente, zaniepokojenie 
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Relacje: cztowiek - Al 


Przypadek LaMDA + Blake Lemoine (Google), 2022: 


ih 


"Ex Machina", 2014 


- LaMDA: językowy model ML typu transformer, 
trenowany na bazie rozmiaru 10” słów (chatbot) 


- Blaise Agiiera y Arcas, Google VP: "AI nets 
making strides towards consciousness" 


- Blake Lemoine, inżynier zajmujący sie LaMDA, 


CALLISTER 
zwolniony 2 firmy po publicznym stwierdzeniu: ‚лоно ` 
"LaMDA is sentient" i... сһес1 zatrudnienia dla 
ше) prawnika 


"USS Callister/Black Mirror", 2017 


- LaMDA: "sentient AI" czy raczej papuga? 


WESTWORLD 


"Westwotld", 2016 


https:/ /www.washingtonpost.com/technology/2022/06/11 /google-ai-lamda-blake-lemoine/ 
https:/ /www.wited.com/story/lamda-sentient-ai-bias-google-blake-lemoine/ 
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5. Wplyw па nas: zastosowania 


Rozpoznawanie 
obrazów/wzotców/ сое: р 
. ^ NetFlow-Based \ | / 
obiektów oo (OJ сш 
Peering 3 ыр 
Point Р. 


Сізсо Апотаіу 
Guard Cluster 


POP 


Enterprise C 


Wspomaganie podejmowania decyzji, 


tekomendacje 


NetFlow-Based Backbone / / 


Peering Monitoring 
"i Point о / j 
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Cisco Traffic 
Anomaly 
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Targeted 
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Asystenci — Siri/ Cortana/ Alexa/ Watson/ Google As. VOICE ASSISTANTS 


5. Wpływ па nas: Big Brother 


ы ACĄ 


A 
Те”; 


€ rozpoznawania (ЕРЕН oparty па kamerach CCTV, Beijing 
(Gilles Sabrié / The Washington Post) 


„We don’t want to have any China-like social scoring systems” 
— Dita Charaznova, wiceprezydent Parlamentu EU 
konferencja European Vision for АТ, kwiecien 2021 


Kai Strittmatter "Chiny 5.0. Jak powstaje cyfrowa dyktatura", W.A.B. 2020 
Simon Denyer, "In China, facial recognition is sharp end of a drive for total surveillance", Washington Post 2018 
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5. Wpływ na nas: Googie Amazon F У. pyle 


Dzialanie: (a) tracking, (b) profiling, (c) targeting 


Badania M. Kosinskiego, od 2013 


Media spotecznosciowe: konsekwencje modelu: 
- polaryzacja opinii 


Е propagac] a fake news (deep fake) "Social Dilemma", Netflix 2020 


Cambridge Analytica (2018), Francis Haugen "dmucha ху gwizdek" (2021) 


Algorithm Watch: Instagram daje priorytet zdjęciom osób skapo-odzianym 


M. Kosinski, D. Stillwell, T. Graepel, "Private traits and attributes are predictable from digital records of human behavior", 2013 
Y. Wang, M. Kosinski, "Deep neural networks are more accurate than humans at detecting sexual orientation from facial images", 2018 25 


https://algorithmwatch.org/en/instagram-reseatch-shut-down-by-facebook/ 


Ile warte ва nasze dane? 


yelp? F 
| 
Wartosé danych jednego konta се | 


па ЕВ: 60-400 %% 


Internetowy drenaz danych: 


e zadania typu НІТ5 (Human Intelligent Tasks) na platformach 
takich jak MTurk czy Clickworker 


e аркі :-/ пр. face-aging 


ө captcha 


ө a przede wszystkim social media + nasze konta: facebook, google, 
instagram, whatsapp, tiktok, airbnb, linkedin, github, ... 


Przygotowanie danych, m.in. czyszczenie, etykietowanie (labeling), 
odpowiada za 80% czasu uczenia AT** 


* zrodla: fbme.disconnect.me, Datacoup, wartosc gieldowa ЕВ 


26 
**raport Cognilityca, "Data Engineering, Preparation and Labeling for AI 2020" 


5. Wpływ па nas: podejmowanie decyzji 


Decyzje: 
kiedy je oddać (lepszym od nas samych) 
algorytmom? 


Nawigacja? 
Prowadzenie samochodu? 
Serial? Gra? Ksiazka? 


Czipsy? Wino? Buty? 


Szerzej: 
Studia? 


- np. system udzielania kredytów 
Partia polityczna? 


- ubezpieczenia 
Partner? - aplikacje o prace 


- wytoki sadowe 


27 
Eric Niiler "Can AI Be а Fair Judge in Court? Estonia Thinks So", Wired.com 2019 


5. Wpływ па nas: metaversa 


es i | 


| Sandbox 


*— Facebook Metaverse 
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Dylemat wagonika (wersja AI) 


Utilitarian vs self-protective Autonomous Vehicles 


PP 


Minimalizacja liczby zgonów Ochrona pasażerów w pierwszej kolejności 


B с 


J.-F. Bonnefon, I. Rahwan, A. Shariff, "Тһе Social Dilemma of Autonomous Vehicles", Science 2016 29 


5. Wpływ па nas: oddawanie decyzji AI 


1. Sprawiedliwość vs tendencje (bias) 


2. Transparentnosc podejmowania decyzji 


3. Odpowiedzialnosc 
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5. Wpływ па nas: oddawanie decyzji Al 


1. Sprawiedliwość vs tendencje (bias) 
2. Transparentnosc podejmowania decyzji 


3. Odpowiedzialność 


© Meesenburg Großhandel 


Most "Schillingbrucke", Berlin 


Simon Weckert, "Google Maps Hacks" Performance & Installation 2020 
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Podsumowanie 


Al: 


1. Obserwacja 1 zbieranie danych 

2. Budowanie modeli 1 wnioskowanie 
3. Uczenie maszynowe 

4. Naturalne interakcje z człowiekiem 


5. Wpływ 1 znaczenie dla nas (personalne, społeczne) 
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